Einführung in qualitative und quantitative Forschungsmethoden
Aktivierung Ihres Vorwissens
Ihre Fragen
Experiment: Messtheorie (Master Thesis Sonja Hahn)
Elaboration Messtheorie anhand Ergebnisse des Experiments
Vertiefung: Beurteilerübereinstimmung bei der Notengebung
Birkel (2005)
Alltagsmythen vs. interne Validität
Bearbeiten Sie die Lernkarten zur Messtheorie auf moodle.
Bitte stellen Sie unter https://bit.ly/merk006 Ihre Fragen zu den Begriffen aus den Lernkarten. Klicken Sie dazu auf »Q & A«.
Bitte bearbeiten Sie das Experiment zur Messtheorie Ihrer Kommilitonin unter https://bit.ly/merk096
Abstract von Birkel (2005): 131 Lehrer(innen) beurteilten vier Mathematikarbeiten von Viertklässlem. Alle Lehrer verwendeten Punktesystem zur Auswertung. Der relative Anteil der erteilten Punkte konnte bei derselben Arbeit um bis zu 43 Prozentpunkte schwanken. Die abgegebenen Beurteilungen für dieselbe Arbeit differierten um bis zu 2.75 Notenstufen. Damit erscheint die Beurteilung von Mathematikarbeiten als nicht viel reliabler als die Aufsatzbeurteilung. Eine der verwendeten Arbeiten war im Original besonders unsauber in der Ausführung. Von dieser wurde eine “geschönte” Version erstellt und etwa der Hälfte der Beurteiler anstelle der Originalarbeit zur Beurteilung vorgelegt. Bei dieser Arbeit zeigte sich, dass die Auswertung der Arbeit von der Akkuratesse ihrer Ausführung nicht abhängig war, wohl aber die Beurteilung. Die von den Lehrern verwendeten Punktesysteme bei der Auswertung streuten zwischen 16.5 und 55 Punkten. Es zeigte sich, dass die Lehrer mit höchsten maximalen Punktsystemen den Schülern auch mehr Punkte gaben und entsprechend auch bessere Noten (voständigen Artikel hier herunterladen).
Effekte und Verzerrungen die Alltagsmythen entstehen lassen buw. die interne Validität von Aussagen senken sind u.a.
library(tidyverse)
set.seed(2505)
source("https://soscisurvey.ph-karlsruhe.de/Mathematikarbeiten/?act=e1g9LMzN1JsM9XzCKPrEzeYQ&rScript")
ds |>
filter(lubridate::ymd_hms(STARTED) > lubridate::ymd_hms("2023-05-03 10:00:00") &
FINISHED == 1 &
SC01 == "Ja, ich habe den Datenschutz gelesen und bin damit einverstanden.") |>
sample_n(1) |>
mutate(`Gewinnercodes (ohne die letzten drei Stellen)` = substr(ZG03_01, 1, 9)) |>
dplyr::select(`Gewinnercodes (ohne die letzten drei Stellen)`)